Towards Combining Finite State, Ontologies, and Data Driven Approaches to Dialogue Management for Multimodal Question Answering

Information-providing dialogue systems typically use one of the following dialogue strategies: finite-state based, frame-based, or agentbased. Recent extensions are concerned with hybrid models, where mixed automaton and information state approaches are combined. We report on our multimodal mobile Semantic Web access system SMARTWEB which uses a more rigid dialogue management strategy to ensure operability and robustness of the system while allowing for flexible dialogical interaction in a question answering scenario. In addition, a strategy to incorporate information state approaches into the running system to be extended towards a machine learning scenario for very particular, e.g. domain or language specific, dialogue management decisions is proposed. Korak h kombiniranju končnih avtomatov, ontologij in pristopov na podlagi podatkov za vodenje dialoga pri multimodalnem odgovarjanju na vprašanja Sistemi dialoga za dajanje informacij običajno uporabljajo eno od strategij, značilnih za dialog: takšno, ki temelji bodisi na končnih avtomatih, na okvirih ali agentih. Najnovejše širitve se ukvarjajo s hibridnimi modeli, pri katerih se kombinirata pristopa avtomatov in informacijskega stanja. V prispevku predstavljamo svoj multimodalni mobilni sistem SMARTWEB za dostopanja do mreže Semantic Web, ki uporablja bolj togo strategijo vodenja dialoga in s tem zagotavlja operabilnost in robustnost sistema, hkrati pa dovoljujemo prilagodljivo dialoško interakcijo v scenariju odgovarjanja na vprašanja. Poleg tega predlagamo strategijo za vključevanje pristopov informacijskega stanja v delujoč sistem, ki bi se razširil v scenarij strojnega učenja za zelo specifične odločitve vodenja dialoga, npr. za določeno področje ali jezik.